I III! 1)1 tl III II II III 11 III II III II III II III II ill II III II III II III III II 11 111 I IMI 



@ BUNDESREPUBLIK 
DEUTSCHLAND 




® Offenlegungsschrift 
®DE 19726877 A 1 



® 



DEUTSCHES 
PATENT- UND 
MARKENAMT 



@ Aktenzeichen: 
(2) Anmeldetag: 
(§) Offenlegungstag: 



197 26 877.3 
24. 6.97 
7. 1.99 



Int. Cl.^: 

H 04 N 5/225 

H 04 N 5/14 
G 06 T 5/00 
G 06 T 1/40 
A 61 B 1/04 
//H04N7/18 



1^ 
00 

<o 

CM 
0) 

111 

o 



@ Anmelder: 


@ Erfinder: 


Fraunhofer-Gesellschaft zur Forderung der 


Urban, Volker, Dr., 65307 Bad Scnwalbach, Dh; 


angewandten Forschung eV, 80636 Munchen, DE 


Schiinemann, Matthias, 70839 Gerlingen, DE 


@ Vertreter: 


(56) Entgegenhaltungen: 


PFENNING MEINIG & PARTNER GbR, 80336 


DE 43 19 502 A1 


Munchen 


DE 94 14 957 U1 




US 52 27 835 




JP 04-2 00 081 A 



Die folgenden Angaben sind den vom Anmelder eingereichten Unterlagen entnommen 

Prufungsantrag gem. § 44 PatG ist gestellt 

@ Bildverarbeitungssystem und Verfahren zur Bildverarbeitung fur Endoskope 

@ Die Erfindung betrifft ein Bildverarbeitungssystem und 
ein Verfahren zur Bearbeitung von mit Endoskopen erhal- 
tenen Bildern und soil zur Bildrestauration verwendet 
werden konnen, wobei sowohl samtiiche Verzeichnungs- 
und andere Fehler korrigiert als auch der physikalisch be- 
dingte Helligkeitsabfall zu den Bildrandern kompensiert 
werden sollen. Das erflndungsgemafSe Bildverarbei- 
tungssystem und das Verfahren zur Bildverarbeitung fCir 
Endoskope mit einer Optik mit einsteilbarer Brennweite, 
bei dem Objekte auf einem elektronischen Bildwandler 
abbildbar und digitalisiert uber eine elektronische Bild- 
verarbeitung einem Display zufuhrbar sind, verwendet 
ein neuronales Netzwerk ais Korrektursystem fur Abbll- 
dungsfehler der Optik und/oder fur den Randabfall der 
Helligkeit. 



00 
CM 



DH lyV 26 8 /7 A 1 



Beschreibung 

Die Erfindung betrifft ein Bildverarbeitungssystem und ein Verfahren zur Bearbeitung von mitEndoskopen erhaltenen 
Bildem nach deiii Oberbegriff des PatenLanspruchs 1 , Dabei soli die erfindungsgeinaBe Losung zur BildresLauration ver- 

5 wendet werden konnen, wobei sowohi samtliche Verzeichnungs- und andere Fehler korrigiert als auch der physikalisch 
bedingte Helligkeitsabfall zu den Bildrandem kompensiert werden sollen. Solche Endoskope mit veranderlichen Brenn- 
weitenbereich ermoglichen eine entsprechend variable VergroBerung und dadurch auch eine Sichtwinkelbereichsande- 
rung, konnen sie in den verschiedensten Gebieten der Technik und insbesondere in der Chirurgie eingesetzt werden. Un- 
ter operativen und diagnostischen Bedingungen ist es haufig erforderlich, die verschiedensten Informationen iiber die zu 

10 betrachtenden Objekte einmal in einem Uberblick und zum anderen im Mikrobereich zu gewinnen. Da dies in der Regel 
durch Veranderung der Brennweite der jeweiligen Optik erreicht wird, ist es erforderlich, die Abbildungsfehler, bei den 
Bildern auftretenden Verzeichnungen und den Helligkeitsabfall zu den Bildrandern auszugleichen, wobei keine oder nur 
sehr kleine Zeitkonstanten zugelassen werden diirfen, also eine zumindest nahezu Echtzeitdarstellung erfolgen muB. 
Bisher iiblicherweise verwendete Endoskope nait elektronischer Bildubertragung arbeiten einmal niit einer proximal- 

15 seitig angeordneten Videokamera oder es wird ein elektronischer Bildwandler (CCD-Sensoren) im AnschluB an eine ent- 
sprechend ausgebildete Optik angeordnet, mit der die Brennweite in Stufen oder kontinuierlich verandert werden kann. 

Mit dem Bildwandler wird dann das dort abgebildete Bild in elektronische Signale umgewandelt und auf herkommli- 
che Art und Weise verarbeitet, einem Display (z. B. Monitor) zugefuhrt und dort kann das Bild des jeweils anvisierten 
Objektes optisch sichtbar gemacht werden. 

20 Ein solches Endoskop ist beispielsweise aus DE43 19 502 Al bekannt, wobei ein Zoom-Objektiv, bestehend aus 
mehreren Linsen, eingesetzt wird, die mittels einer Mechanik eine Brennweitenveranderung ermoglichen. Dabei wird ein 
Sensor verwendet, um ein distales fokussieren zu ermoglichen und damit fiir den Benutzer die Augenabberation konstant 
bleibt, um eine einfache und bequeme Benutzung im gesamten Brennweitenbereich zu erreichen. 
Bei diesem bekannten Endoskop ist es jedoch nicht moglich, samtliche Abbildungsfehlei; die bedingt durch die einge- 

25 setzte Optik auftreten, zu beriicksichtigen und zu korrigieren, so daB eine nahezu originalgetreue Darstellung des anvi- 
sierten Objektes nicht moglich wird und insbesondere Verzeichnungsfehler und Helligkeitsfehler an den Bildrandem un- 
beriicksichtigt bleiben. 

Von R. Wartmann ist in "Die Entzerrung verzeichnungsbehafteter Bilder in der messenden digitalen Bildverarbei- 
tung"; Jahrbuch fiir Optik und Feinmechanik 43. Jahrgang (1996); Berlin; Verlag Schiele & Schon, auf das Erfordemis 

30 der Korrektur von Verzeichnungsfehlem hingewiesen worden. Dabei wird beispielhaft ein Algorithmus beschrieben, wie 
aufiterativem Wege konstruktionsbedingte (systematische, reproduzierbar auftretende) Verzeichnungsfehler korrigiert 
werden konnen. Ausgehend aus der Kenntnis iiber die jeweilige Grundverzeichnung und die Pupillenabberation konnen 
diese Fehler rechnerisch bei einer Bildverarbeitung beriicksichtigt werden, wobei eine entsprechend relativ lange Bear- 
beitungszeit erforderlich ist, so daB die Abarbeitung des Algorithmus fur eine Echtzeitdarstellung zu lange dauert. Die 

35 Bestimmung der Randbedingungen und die notwendige Kalibrierung des Algorithmus fiir eine ausreichende Anzahl von 
Einzelpositionen eines Zoom-Objektives fiir die verschiedenen eingestellten Brennweiten ist sehr aufwendig, so daB der 
Einsatz unter Bedingungen, wie sie in der Chirurgie herrschen, wenn uberhaupt nur bedingt erfolgen kann. Eine Korrek- 
tur von auf Fertigungstoleranzen und fertigungsbedingte Fehler zuriickgehenden (sogenannten zufalligen) Verzeich- 
nungsfehlem ist mit derartigen Algorithmen nicht moglich. 

40 Daneben ist aus der US 5,313,306 eine Pseudo-Zoom-Kamera bekannt, bei der anstelle eines herkonmilichen Zoom- 
Objektives ein Weitwinkelobjektiv eingesetzt wird. Die Auswahl des Bildausschnittes und des Bildwinkels wird bei die- 
ser Losung durch die Bildverarbeitung erreicht. Eine eventuelle VergroBerung der Abbildung wird dabei dadurch er- 
reicht, daB nur die Informationen einer Teilflache des Bildwandlers bei der letztendlichen Abbildung beriicksichtigt wer- 
den. Dies hat einmal den Nachteil, daB die Anspriiche an die Bildauflosung der Abbildung und damit der Bildqualitat 

45 verringert werden miissen oder es muB ein sehr hochauflosender CCD-Wandler verwendet werden, der sehr kosteninten- 
siv ist und in seinen Abmessungen noch so groB ist, daB er nicht ohne weiteres im Endoskop integriert werden kann. 

Aus US 5,313,306 ist es weiter bekannt, die Bildkorrektur auf der Basis einer mathematischen Transformation vorzu- 
nehmen, deren Parameter iiber eine Modellbildung aus den Abbildungseigenschaften des optischen Systems gewonnen 
werden. Dabei erfolgt keine vollstandige Korrektur samtlicher Fehler und insbesondere die systematischen Fehler des je- 

50 weiligen Endoskoptyps und die Fehler, die durch Fertigungstoleranzen und UnregeknaBigkeiten bei der Herstellung be- 
dingt sind, werden nicht beriicksichtigt, so daB individuelle Korrekturen nur im begrenzten Mafie erfolgen. 

Bei dieser Losung erfolgt auch keine Korrektur des Fehlers, der durch Helligkeitsabfall an den Bildrandern hervoige- 
rufen wird. 

Es ist daher Aufgabe der Erfindung, eine Mdglichkeit zu schaffen, mit der optische Informationen, die mit einem En- 
55 doskop oder einem endoskopahnlichen Gerat erhalten werden konnen, so zu verarbeiten, daB eine nahezu Echtzeitabbil- 
dung des anvisierten Objektes bei gleichzeitiger nahezu voUstandiger Korrektur samtlicher Abbildungsfehler, die durch 
die mit einer Brennweitenveranderung versehene Optik hervorgerufen werden. 

ErfindungsgemaB wird diese Aufgabe durch die im Patentanspruch 1 genannten Merkmale fiir das erfindungsgemaBe 
Bildverarbeitungssystem und die Merkmale des Patentanspruchs 10 fur das Bildverarbeitungsverfahren gelost. V)rteil- 
60 hafte Ausgestaltungsformen und Weiterbildungen der Erfindung ergeben sich bei Verwendung der in den untergeordne- 
ten Anspriichen enthaltenen Merkmale. 

Dabei ist es bei der erfindungsgeinaBen Losung moglich durch Kompensation bzw. Korrektur das fehlerbehaftete 
Ubertragungsverhalten des gesamten optischen und elektronischen Systems zu beeinflussen, wobei auch das den Bildsi- 
gnalen iiberlagerte Rauschen entsprechend berucksichtigt werden kann. Dies soil nachfolgend schematisch durch die 
65 Darstellung der fehlerbehafteten Bildfiinktion g(x', y', f), die durch die Ubertragungsfunktion des gesamten optisch/elek- 
troriischen Systems h(x', y', x, y, f) mit dem iiberiagerten Rauschen n(x', y') gebildet wird, sowie der dem optisch/elek- 
tronischen System nachgeschalteten Korrekturfunktion w(x', y', f) gezeigt werden. 
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Dabei stehen x, y fiir die planaren Objektkoordinaten, x', y' fiir die Koordinaten der diskreten Intensitatssensoren (Pi- 
xel) auf dem Bildaufhahmesensor (CCD-Matxix) sowie f fur die Brennweite der Zoom-Optik. 

ErfindungsgemaB werden die optikbedingten Abbildungsfehler unter Verwendung eines echtzeitfahigen neuronalen 
Netzwerkes korrigiert. Das neuronale Netzwerk wird dabei an einer Schnittstelle zwischen einer Signalvorverarbeitung, 
bei der die Signale verstarkt, konditioniert und digitalisiert werden und einer Signalverarbeitung, bei der die Signale ge- 
gebenenfalls gefiltert, einer Merkmalsextraktion unterzogen und iiber ein Interface einem Display zufuhrbar werden, an- 
geordnet. 

Die Korrekturfunktion w(x', y', f) wird erfindungsgemaB durch ein ein- oder mehrlagiges neuronales Netzwerk bereit- 
gestellt, dessen Schwerpunktwerte die Korrekturfunktion definieren. Zur Ermittlung der Schwerpunktwerte und damit 
der Korrekturfunktion in Abhangigkeit von der aktuellen Brennweite w(x', y', f) werden mehrere in Gestaltung und 
GroBe bekannte Muster als Objekt anvisiert. Aus dem dabei erhaltenen fehlerbehafteten Bildsignal g(x', y', f) sowie der 
bekannten Objektfunktion A(x, y) wird mit dem Ziel einer weitestgehenden Kongruenz von Objektfunktion A(x, y) und 
Bildfunklion A'(x', y') durch einen TVainingsprozeB die Korrekturfunktion w(x', y', f) fiir eine endliche Menge von 
Brennwerten f gewonnen. Das entsprechende Abbild dieser Korrekturfunktion wird in Form ermittelter Schwerpunkt- 
werte fiir verschiedene bei der Optik eingesteUte Brennweiten in einem Datenspeicher abgelegt. 

Fiir die Reproduktion der Korrekturfunktion ist das neuronale Netzwerk mit einer nichtfluchtigen, programmierbaren 
Speichereinrichtung fiir die Speicherung der fiir die jeweilige Brennweite giiltigen Schwerpunktwerte verbunden. 

Die gespeicherten Schwerpunktwerte werden fur die brennweitenabhangige Korrekturfunktion w( x', y', f) iiber einen 
Baustein bzw, eine Funktion zur Parameterauswahl aus dem Speicher ausgelesen, dem neuronalen Netzwerk zur \ferfii- 
gung gestellt und fiir die Korrektur des Bildsignals verwendet, 

Hierfiir wird ein Brennweitenerfassungssystem verwendet, das, wie noch zu beschreiben sein wird, in unterschiedlich- 
ster Form angewendet werden kann. 

Die jeweilige Brennweite kann dabei beispielsweise bei einem Zoom-Objektiv mit einem Positionssensor an der Optik 
erf aBt werden und das Signal, das der eingestellten Brennweite entspricht, kann iiber eine Positionsaus wertung dem B au- 
stein bzw. der Funktion zur Parameterauswahl und damit der durch das neuronale Netzwerk realisierten Korrekturfunk- 
tion w(x', y', f) zur Verfiigung gestellt werden. 

Eine andere Moglichkeit zur Erfassung der jeweils mit der Optik eingestellten Brennweite besteht darin, daB die Steu- 
ersignale eines Antriebes fiir die Einstellung der Brennweite an der Optik des Endoskopes parallel zur Positionsauswer- 
tung herangezogen werden, um die eingestellte Brennweite zu erfassen und das entsprechende Brennweitensignal in der 
gleichen Form fiir die Fehlerkorrektur auszunutzen, wie dies bei der Verwendung des bereits genannten Positionssensors 
der Fall war. 

Eine weitere vorteilhafte Moglichkeit zur Erfassung der eingestellten Brennweite der Optik besteht darin, daB eine 
Hilfsstruktur in den Strahlengang des optischen Systems, bevorzugt auf einem der optischen Bauelemente, angeordnet 
wird. Diese Hilfsstruktur hat eine bekannte Geometric und eine bekannte GroBe, so daB sich die Abbildung auf dem elek- 
tronischen Bildwandler brennweitenabhangig verandert. Mit den bekannten Daten der Hilfsstruktur kann das auf dem 
elektronischen Bildwandler abgebildete Bild der Hilfsstruktur ausgenutzt werden, um die Brennweite zu berechnen. Da 
' die Hilfsstruktur bekannt ist, kann diese auf elektronischem Wege bei der nachfolgenden Bildverarbeitung wieder aus der 
eigentlichen Abbildung des Objektes ausgeblendet werden. Diese Struktur kann aber auch so ausgebildet sein, daB ihre 
GroBe so klein gehalten oder so angeordnet ist, daB sie bei der lelztendlichen Abbildung auf dem Display zu vemachlas- 
sigen ist. 

Mit der Erfindung ist es nunmehr, im Gegensatz zu den bekannten Losungen, moglich, eine kontinuierhche Beobach- 
tung durchzufuhren, wie sie bei chirurgischen Operationen unabdingbar ist, und auBerdem iiber die gesamte Zeit eine 
groBe Variationsbreite fur Brennweite und Sichtwinkel bei weitgehender Korrektur der konstruktions- und fertigungsto- 
leranzabhangigen Abbildungsfehler und Verzeichnungen zu erreichen. Mit der erfindungsgemaBen Verwendung von 
neuronalen Netzwerken ist es im Gegensatz zum bekannten moglich, sowohl baureihenweise (systematische), wie auch 
geratespezifische (zufallige) Fehler und Einftusse auszugleichen und dies auch dann, wenn solche Fehler an sich unbe- 
kannt und/oder analytisch nicht oder nur mit sehr groBem Aufwand zu erfassen sind. Das neuronale Netzwerk ist in der 
Lage solche Fehler bei der Korrektur des Bildes des abzubildenden Objektes zu beriicksichtigen. Mit der Erfindung ist es, 
im Gegensatz zu den bekannten Losungen, weiterhin moglich, eine kontinuierliche Beobachtung durchzufiihren und 
zeitgleich den optisch bedingten Helligkeitsabfall zu den Bildrandera zu kompensieren. Dadurch wird eine automatische 
Kalibrierung des Endoskopes erreichbar. 
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Mil derRealisierung des Bildverarbeitungssystems und Bildverarbeitungsverfahrens zur Bildrestauration nach derEr- 
findung konnen Verzeichnungs- und andere Fehlerbei Endoskopen oder endoskopahnlichen Geraten bei der Abbildung 
korrigiert werden, so daB solche Systeme sehr flexibel und allgemein anwendbar sind. Sie konnen bei sehr vielen diagno- 
slischen und therapeuLischen Aufgaben in der Medizin Verwendung finden. Es besLehl aber auch die MoglichkeiL, sie auf 
5 anderen Gebieten der Technik mit den bereits genannten Vorteilen einzusetzen, da ein solches System mit relativ gerin- 
gen Kosten hergestellt werden kann. 

In der Medizin oder in der Technik konnen die verschiedensten Objekte bei verschiedensten Situationen, in Abhangig- 
keit von den jeweiligen Erfordemissen abgebildet werden. 

Es konnen konstruktionsbedingte Abbildungsfehler der Optik, die sich in Verzeichnung oder Pupillenabberation ma- 
10 nifestieren, korrigiert werden. Solche Fehler konnen durch Fertigungstoleranzen, wie Zentrierfehler, rotationssymmetri- 
sche und nichtrotationssynimetrische Abweichungen von den Konstruktionsparainetem, insbesondere an den verwende- 
ten Linsen in Echtzeit kontinuierlich oder quasikontinuierlich iiber den gesamten Brennweitenbereich berucksichtigl 
werden. 

Auch der optisch bedingte Helligkeitsabfall an den Bildrandem kann entsprechend kontinuierlich oder quasikontinu- 
15 ierlich iiber den gesamten Brennweitenbereich kompensiert werden. 

Neben diesen genannten Fehlem konnen auch die bei der optoelektronischen Signalwandlung auftretenden Fehler 
(z. B. Bildrauschen) in Echtzeit kontinuierlich oder quasikontinuierlich iiber den gesamten Brennweitenbereich beriick- 
sichtigt werden, wobei auch eine tiberlagerung mit den erstgenannten Fehlerarten keine Probleme bei der Korrektur mit 
sich bringt. Das erfindungsgemaB ausgebildete Bildverarbeitungssystem ist robust und zuverlassig, da die verwendete 
20 Anzahl mechanisch betatigter Telle sehr beschrankt ist. 

Nachfolgend soil die Erfindung an Ausfuhrungsbeispielen naher beschrieben werden. 
Dabei zeigt 

Fig, 1 ein Blockschaltbild eines Ausfuhrungsbeispieles nach der Erfindung; 
Fig. 2 ein weiteres Blockschaltbild eines zweiten Ausfiihrungsbeispieles; 
25 Fig. 3 ein drittes Ausfuhrungsbeispiel eines erfindungsgemaBen Bildverarbeitungssystems und 

Fig. 4 drei Darstellungen von Mustem fiir die TVainierung des erfindungsgemaB zu verwendenden neuronalen Netz- 
werkes. 

Die Fig. 1 bis 3 geben verschiedene Ausfuhrungsbeispiele fur die Erfindung in Form von Blockschaltbildern wieder. 
Bei dem in der Fig. 1 gezeigten Ausfiihrungsbeispiel wird ein Objekt 1 mittels eines Endoskopes oder eines endoskop- 

30 ahnlichen Gerates 2, das mit einer Optik 3 init einer stark veranderlichen Brennweite ausgestattet ist, auf einen Bild- 
wandler 4 abgebildet. Der Bildwandler 4 wandelt die optischen Informationen in elektronische Signale und diese gewan- 
delten Signale gelangen iiber eine Signalvorverarbeitungs-ZSignalkonditionierungseinheit 5 in digitalisierter Form zu ei- 
nem bildkorrigierenden System 6. Das bildkorrigierende System 6 wird aus einem neuronalen Netzwerk 7, einem Spei- 
cher 8 fur Schwerpunktwerte, einer Ablaufsteuerung 9, einer Einheit zur Parameterauswahl 10 und entsprechenden Ein- 

35 /Ausgabebausteinen 11 und 12 gebildet. Die Korrektur der gewandelten Signale erfolgt in Abhangigkeit der momentanen 
Brennweite der Optik 3 mit Hilfe des neuronalen Netzwerkes 7, so daB eine Bildverarbeitungseinheit 13 bzw. einem Dis- 
play 14 Signale, die ein weitgehend fehler- und verzeichnungsfreies Abbild des Objektes 1 reprasenderen, zur Verfugung 
gesteUt werden. 

Die Brennweiteneinstellung der Optik 3 kann dabei manuell aber auch unter Verwendung eines Antriebes erfolgen. 
40 Bei diesem Beispiel wird die aktuelle Brennweite unter Verwendung eines Positionssensors 16 erfaBt und uber eine 
Positionsauswertung 19 zur Paraineterauswahl 10 dem neuronalen Netzwerk 7 zur Korrektur der das Bild reprasentie- 
renden Informationssignale zur Verfiigung gesteUt, wobei diese aus dem Speicher 8 brennweitenabhangige Schwer- 
punktwerte aus lesbar sind. 

Bei dem in der Fig. 2 dargestellten Blockschaltbild fur ein zweites Ausfuhrungsbeispiel wird anstelle des Positions- 
45 sensors 16 fiir die Optik 3 das Steuersignal einer Zoom-Steuerung 18 fiir einen Antrieb der Optik 3, mit dem die Brenn- 
weite verandert werden kann, zur Brennweitenerfassung ausgenutzti . 

Die Beriicksichtigung der gemessenen Brennweite bei der Bildkorrektur erfolgt dann in der gleichen Form, wie dies 
bereits fiir das erste Ausfuhrungsbeispiel ausgefiihrt worden ist. 
Bei dem in der Fig. 3 gezeigten Blockschaltbild eines dritten Ausfiihrungsbeispiels wird auf eine direkte Messung der 
50 Objektivposition verzichtet und die Brennweite aufindirektem Wege ermittelt. Dabei wird im optischen Strahlengang, 
bevorzugt auf einem der bewegten optischen Bauelemente der Optik 3 eine Hilfsstruktur angeordnet, deren Geometrie 
und GroBe bekannt ist. Die entsprechenden Informationen iiber die Hilfsstruktur werden ahnlich verarbeitet, wie dies mit 
den Signalen des Objektes 1 der Fall ist. Von der Bildverarbeitung 13 werden die der Hilfsstruktur entsprechenden Si- 
gnale einer Positionsauswertung 19 fiir die Parameterauswahl 10 zur Verfugung gesteUt, um die mit der Positionsauswer- 
55 tung 19 bestimmte Brennweite der Optik 3 bei der Korrektur zu beriicksichtigen. Dies ist dadurch moglich, daB die Aus- 
gangskoordinaten der Hilfsstruktur bekannt sind und deren Abbildung auf dem Bildwandler 4 entsprechend der einge- 
stellten Brennweite der Optik 3 erfolgt und mit der Abbildung der Hilfsstruktur auf dem Bildwandler 4 die eingestellte 
Brennweite der Optik 3 rechnerisch bestimmt werden kann. 

In der Fig, 4 sind dann verschiedene Muster 20, 21 und 22 gezeigt, die anstelle des Objektes 1 zum Trainieren des neu- 
60 ronalen Netzwerkes 7 und damit zur Ermittiung der Bildkorrekturfunktion eingesetzt werden. 

Da die Ausgangsmuster in ihrer Form und GroBe bekannt sind, kann deren fehlerbehaftete Abbildung auf dem Bild- 
wandler 4 mit einer ideal zu erwartenden Abbildung verglichen werden. Aus diesem Vergleich ermittelt das selbstler- 
nende neuronale Netzwerk 7 die die Bildkorrekturfunktion deteminierenden Schwerpunktwerte, die fur verschiedene 
Brennweiten der Optik 3 im Schwerpunktwertespeicher 8 abgelegt werden. Diese im Speicher 8 abgelegten Schwer- 
65 punktwerte werden im weiteren brennweitenabhangig mit Hilfe der Positionsauswertung 19 und der Paraineterauswahl 
10 bei der Bildwiedergabe im Echtzeitbetrieb des Endoskopes 2 fiir die Korrektur samtHcher Bildfehler eingesetzt. 

Die Muster 20, 21 und 22 sind dabei vorteilhaft so ausgebildet, daB mit Ihnen Helligkeits- und Verzeichnungsfehler 
der jeweiligen Optik 3 fur das spezifische Endoskop 2 erkannt, korrigiert und bei der Bildverarbeitung entsprechend be- 
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rucksichtigt werden konnen, 

Patentanspruche 

1. Bildverarbeitungssystem fiir Endoskope mit einer Optik mit einstellbarer Brennweite, bei dem Objekte (1) auf 5 
einem elektronischen Bildwandler (4) abbildbar und digitalisiert iiber eine elektronische Bildverarbeitung einem 
Display (14) zufiihrbar sind, dadurch gekennzeichnet, daB ein neuronales Netzwerk (7) als Korrektursystem fiir 
Abbildungsfehler der Optik (3) und/oder fiir den Randabfall der Helligkeit integriert ist. 

2. Bildverarbeitungssystem nach Anspruch 1, dadurch gekennzeichnet, daB das neuronale Netzwerk (7) an einer 
Schnittstelle zwischen einer digitaUsierenden Signalvorverarbeitungsstufe und einer Signalverarbeitungsstufe ge- lO 
schaltet ist. 

3. Bildverarbeitungssystem nach Anspruch 1 oder 2, dadurch gekennzeichnet, daB das neuronale Netzwerk (7) mit 
einem nichtfluchtigen, progranninierbaren Speicher (8), zur Speicherung von fur das neuronale Netzwerk (7) beno- 
tigten Schwerpunktwerten, verbunden ist. 

4. Bildverarbeitungssystem nach einem der Anspriiche 1 bis 3, dadurch gekennzeichnet, daB ein System zur Erfas- 15 
sung der eingestellten Brennweite mit dem neuronalen Netzwerk (7) verbunden ist. 

5. Bildverarbeitungssystem nach einem der Anspriiche 1 bis 4, dadurch gekennzeichnet, daB das System zur Erfas- 
sung der eingestellten Brennweite mit einem Positionsauswertungssystem (19) fur die Optik (3) verbunden ist. 

6. Bildverarbeitungssystem nach einem der Anspriiche 1 bis 4, dadurch gekennzeichnet, daB die eingestellte Brenn- 
weite mit einem Positionssensor (16) an der Optik (3) meBbar ist, * 20 

7. Bildverarbeitungssystem nach einem der Anspriiche 1 bis 5, dadurch gekennzeichnet, daB das System zur Erfas- 
sung der eingestellten Brennweite der Optik (3) mit einem Antrieb (17) zur Einstellung der Brennweite, dessen 
Steuersignale erfassend, verbunden ist. 

8. Bildverarbeitungssystem nach einem der Anspriiche 1 bis 4, dadurch gekennzeichnet, daB in den Strahlengang 

des optischen Systems (3, 4) eine Hilfsstruktur bekannter Geometrie und GroBe angeordnet ist. 25 

9. Bildverarbeitungssystem nach einem der Anspriiche 1 bis 8, dadurch gekennzeichnet, daB die Optik (3) ein 
Zoom-Objektiv ist. 

10. Verfahren zur Bildverarbeitung von Endoskopen, deren Brennweite einstellbar ist und bei dem das Objekt (1) 
mit einer einstellbaren Optik (3) auf einem Bildwandler (4) abgebildet, mit einer Signalvorverarbeitung die Bildsi- 
gnale digitalisiert; 30 
und die digitalisierten Bildinformationen mittels eines neuronalen Netzwerkes (7), unter Beriicksichtigung der ein- 
gestellten Brennweite, korrigiert und in korrigierter Form auf einem Display (14) abgebildet werden. 

11. Verfahren zur Bildverarbeitung von Endoskopen, deren Brennweite einstellbar ist und bei dem das Objekt (1) 
mit einer einstellbaren Optik (3) auf einem Bildwandler (4) abgebildet, mit einer Signalvorverarbeitung die Bildsi- 
gnale digitalisiert; 35 
und die digitalisierten Bildinformationen mittels eines neuronalen Netzwerkes (7) unter Beriicksichtigung des ein- 
gestellten Bildwinkels hinsichtiich des auftretenden HelligkeitsabfaUes zu den Bildrandem kompensiert und in 
kompensierter Form auf einem Display (14) abgebildet werden. 

12. Verfahren nach Anspruch 10 oder 11, dadurch gekennzeichnet, daB die Korrektur unter Beriicksichtigung von 

in einem Speicher (8), mittels einer Erkennung von bekannten Mustem (20, 21, 22) fur verschiedene Brennweiten 40 
der Optik (3) erfaBten Schwerpunktwerten durchgefiihrt wird. 

13. Verfahren nach einem der Anspriiche 10 bis 12, dadurch gekennzeichnet, daB die eingestellte Brennweite mit ^ 
mindestens einem Positionssensor (16) an der Optik (3) gemessen und das MeBsignal zum Auslesen der entspre- 
chenden Schwerpunktwerte aus dem Speicher (8) fiir die Bildkorrektur aufbereitet wu-d. 

14. Verfahren nach einem der Anspriiche 10 bis 12, dadurch gekennzeichnet, daB die eingestellte Brennweite mit- 45 
tels der Steuersignale eines Antriebs (17) zur Einstellung der Brennweite an der Optik (3), zum Auslesen der ent- 
sprechenden Schwerpunktwerte aus dem Speicher (8) fiir die Bildkorrektur, erfaBt wird. 

15. Verfahren nach einem der Anspriiche 10 bis 12, dadurch gekennzeichnet, daB die eingestellte Brennweite mit 
einer im Strahlengang des optischen Systems (3, 4) angeordneten Hilfsstruktur bekannter GroBe und Geometrie er- 
faBt wird; wobei die Abbildung der Hilfsstruktur beriicksichtigt wird. 50 

16. Verfahren nach einem der Anspriiche 10 bis 12, dadurch gekennzeichnet, daB brennweiten- und/oder bildwin- 
kelabhangige schwerpunktwerte des neuronalen Netzwerkes (7) durch einen TrainingsprozeB des neuronalen Netz- 
werkes (7) mit Hilfe einer oder mehrerer Musteranordnungen (20, 21, 22) ennittelt werden. 

17. Verfahren nach Anspruch 16, dadurch gekennzeichnet, daB fiir den Brennweitenbereich der Optik (3) mehrere 
Satze von Schwerpunktwerten ermittelt werden, 55 
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